#многоязычный NLP

Baidu выпустила ERNIE 4.5 — серию открытых больших языковых моделей с параметрами от 0.3 до 424 миллиардов, обладающих продвинутой архитектурой и высокой производительностью в многоязычных задачах.

Исследователи Meta AI разработали AU-Net — масштабируемую байтовую авторегрессионную модель U-Net, которая превосходит традиционные токен-базированные трансформеры по языковым задачам и обеспечивает более быструю и эффективную генерацию текста.